资源类型

期刊论文 3

年份

2023 1

2018 1

2017 1

关键词

键值（KV）存储；日志结构合并（LSM）树；非易失性存储器（NVM）；NVMe SSD；写前日志（WAL） 1

高性能计算；层次式混合存储系统；分布式元数据管理；数据迁移 1

检索范围：

排序： 展示方式：

一个针对多种问题的磁盘故障预测模型 Research Article

张晓1,2,3,黎梦钰2,4,Michael NGULUBE1,2,陈泳豪1,2,赵一平1

《信息与电子工程前沿（英文）》 2023年 第24卷 第7期   页码 980-993 doi: 10.1631/FITEE.2200496

摘要： 实验结果表明，对于固态硬盘（SSD）SSD上的小KV数据，MyWAL可以将RocksDB的数据写入性能提高5到8倍。在NVMe SSD和非易失性存储器（NVM）上，MyWAL可以将数据写入性能提高10%–30%。此外，YCSB的结果表明，与SpanDB相比，写入延迟降低了50%。

关键词： 键值（KV）存储；日志结构合并（LSM）树；非易失性存储器（NVM）；NVMe SSD；写前日志（WAL）    

HTML PDF 收藏

勘误：ONFS：面向高性能计算的基于内存、固态硬盘和磁盘的层次式混合文件系统 None

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

《信息与电子工程前沿（英文）》 2018年 第19卷 第2期 doi: 10.1631/FITEE.17e0626

摘要： None

关键词： None    

HTML PDF 收藏

ONFS：面向高性能计算的基于内存、固态硬盘和磁盘的层次式混合文件系统 Article

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

《信息与电子工程前沿（英文）》 2017年 第18卷 第12期   页码 1940-1971 doi: 10.1631/FITEE.1700626

摘要： 随着超级计算机向Eflops规模快速发展和计算核数急剧增加，更大规模和更复杂的应用成为可能。大规模科学计算、新的工作流应用以及检查点操作均需要存储系统具有非常高的带宽和低延迟，这使得高性能存储系统面临严峻的技术挑战。当前基于磁盘的底层存储系统难以满足新一代Eflops超级计算机和应用的要求。为此，本文提出了基于计算结点内存、固态硬盘和磁盘的层次式混合存储系统ONFS (on-line and near-line file system)。它具有三个存储层次和统一的命名空间，支持可移植操作系统接口（portable operating system interface, POSIX）协议，可提供高带宽、低延迟和超大存储容量。本文详细分析了分布式元数据管理、内存借用和归还策略、数据一致性、并行访问控制，以及向下迁移和向上主动预迁移机制。在天河一号超级计算机上实现了ONFS原型系统，测试了I/O (input/output)性能和可扩展性。测试结果表明，单线程和多线程读/写性能比基于磁盘的Lustre分别高出6倍和5倍。与Lustre相比，运行在ONFS上的典型数据密集型应用可获得6.35倍的I/O加速。

关键词： 高性能计算；层次式混合存储系统；分布式元数据管理；数据迁移    

HTML PDF 收藏

标题 作者 时间 类型 操作

一个针对多种问题的磁盘故障预测模型

张晓1,2,3,黎梦钰2,4,Michael NGULUBE1,2,陈泳豪1,2,赵一平1

期刊论文

勘误：ONFS：面向高性能计算的基于内存、固态硬盘和磁盘的层次式混合文件系统

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

期刊论文

ONFS：面向高性能计算的基于内存、固态硬盘和磁盘的层次式混合文件系统

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

期刊论文